方以智故居，坐落于寺巷“凤仪里”，原名“廷尉第”，乃其祖父方大镇廷尉之宅第，其孙方正瑗，命名“潇洒园”。核心地带面积1221.6平方米，计三进。北进和中进，均八开间，为木构架抬梁式建筑，东西端各为两建筑单元：东头明间一间，两侧次间各一间；西头明间一间，两侧次间各两间。每间宽3.8米，长7米，面积26.6平方米。北进和中进之间为天井，面积69.12平方米。天井两旁为长廊，面积64.4平方米。中进和南进之间为长院，面积29.7平方米。
    方以智(1611--1671)，字密之，号曼公。少参加“复社活动”，与冒襄、陈贞慧、侯方域为明季四公子。崇祯十三年(1640)进士，官检讨。入清为僧，浪迹名山。江子长谓其 “真才子”。《浮山志》称其“凡天文、礼乐、律数、声音、文学、书画、医药、琴剑、技勇，无不析其旨趣，著书数十万字，名流海外”。所著《通雅》、《物理小识》、《药地炮庄》均收《四库全书》。他提出“合二而一”的《东西均》，是一部有体系的哲学著作。终生博极群书，考据精核，成为一位集科学、哲学、文学于一身的“百科全书”式的大学者。方以智故居(即潇洒园)，现为市重点文物保护 单位。